Lê Văn Một sinh ngày 30 tháng 11 năm 1921, là con thứ 11 trong một gia đình giáo học quốc tịch Pháp có 13 anh em. Cha ông là cụ Auguste Lê Văn Giỏi, từng là Đốc học Mỹ Tho[1]. Mẹ ông là bà Trần Thị Lang[2]. Ông có dòng dõi gia tộc Thủ khoa Nguyễn Hữu Huân.[3]

Sinh trưởng trong gia đình có Pháp tịch, ông có tên Pháp là Abel René, hoặc Lê Văn Abel René. Gia đình giàu có, ông được hấp thu một nền giáo dục Tây học hoàn chỉnh. Từ nhỏ, ông được gia đình cho học tại Trường tiểu học Mỹ Tho, Trường Lê Bá Cang - Sài Gòn, sau ra học ở Huế rồi ra Hà Nội học ở Trường Thăng Long.[3]